Back معيار استبعاد الروبوتات Arabic Robots.txt Azerbaijani Robots Exclusion Standard BAR Protocol d'exclusió de robots Catalan Robot Exclusion Standard Danish Robots Exclusion Standard German Robots.txt English Estándar de exclusión de robots Spanish استاندارد استثناء کردن رباتها Persian Robots.txt Finnish
robots.txt je standardizovaný textový soubor, kterým může web indikovat, u kterých stránek je nebo není žádoucí, aby je procházeli internetoví boti např. za účelem indexace skrze web crawler. Tento soubor se musí nacházet v kořenovém adresáři daného webu. Jeho syntaxi definuje RFC 9309.
© MMXXIII Rich X Search. We shall prevail. All rights reserved. Rich X Search